重温昔日美好瞬间!AI技术帮你修复老旧照片!

人工智能
实现该修复背后用的是GFPGAN算法。GFPGAN 是腾讯开源的人脸修复算法,它利用预先训练好的面部GAN(如StyleGAN2)中封装的丰富和多样的先验因素进行盲脸(blind face) 修复,旨在开发用于现实世界人脸修复的实用算法。

本篇介绍一款开源的AI技术(2021年发布的),可以帮助你修复老旧照片,让你重温昔日美好瞬间!

在线免费体验网站:https://huggingface.co/spaces/akhaliq/GFPGAN

因为这个模型比较大,需要大量的计算资源,特别是GPU资源,而且还是免费的,所以不知道什么时候会被关闭。现在用的人少,所以这个在线体验还能免费用。

什么是GFPGAN

实现该修复背后用的是GFPGAN算法。GFPGAN 是腾讯开源的人脸修复算法,它利用预先训练好的面部GAN(如StyleGAN2)中封装的丰富和多样的先验因素进行盲脸(blind face) 修复,旨在开发用于现实世界人脸修复的实用算法。

https://github.com/TencentARC/GFPGAN

演示

挑选了一张老旧照片,看看修复效果如何。

特地挑了一张巨模糊的照片。

图片

修复后的效果:

图片

那么 GFP-GAN 如此强大的效果是怎么实现的呢?研究人员受到 StyleGAN2 的启发:

既然 GAN 已经能生成如假乱真的图片,那么它所包含的面部信息,是不是也能帮助人脸修复呢?由此,在 GFP-GAN 的模型框架中,主要用到了一个退化清除模块和一个预训练的 GAN 作为先验。

两个模块通过隐编码映射和多个信道分割空间特征变化层(CS-SFT)连接。

图片

训练过程中,首先要对低质量人脸进行降噪等粗处理,然后保留面部信息。

在保真度方面,研究人员引入了一个面部损失( Facial Component Loss),判断哪些细节需要提升保留,然后再用识别保留损失(Identity Preserving Loss)进行修复。

最近大火的AI绘图领域的Stable Diffusion也是用到了GFPGAN。参考下面的依赖包文件第六行 https://github.com/AUTOMATIC1111/stable-diffusion-webui/blob/master/requirements.txt

责任编辑:武晓燕 来源: 后端云
相关推荐

2014-02-21 09:41:43

2021-06-04 10:48:07

技术研发指标

2020-11-25 12:50:53

微软老旧照片开源

2020-10-16 12:30:58

AI对象软件

2021-02-06 17:49:49

人工智能智能医疗智慧安防

2011-03-14 09:35:22

2019-03-29 09:44:39

AI 数据人工智能

2023-05-16 20:21:58

AI孙燕姿GPT-4

2015-06-03 10:39:01

Google照片云存储云服务

2022-03-25 09:29:57

LinuxshellShellcheck

2011-09-06 14:44:35

Smilebox照片

2022-05-09 14:44:50

修复工具包office

2022-06-14 09:03:03

PythonAIUNet

2021-10-11 17:30:49

AI 人脸识别人工智能

2010-08-06 13:53:43

Symbian开发Symbian诺基亚

2020-07-23 15:47:24

人脸识别人工智能数据

2019-04-17 14:10:59

AI人工智能巴黎圣母院

2018-01-09 15:57:18

热修复开发编译

2020-01-17 08:45:07

AI 数据人工智能
点赞
收藏

51CTO技术栈公众号